Active Learners as Efficient PRP Rerankers
主动学习实现高效PRP重排序
🧭 生成式检索重排序 · 噪声成对比较主动学习 ★ 深度解读
Universidad de San Andrés
将PRP重排序建模为噪声成对比较的主动学习,通过自适应调度和随机方向提示,在低预算下大幅提升Top-K质量
📌 工作参考价值(4 点)
- 在LLM成对重排序场景中,用主动排序(如Mohajer锦标赛+堆提取)替代冒泡/快速排序,在相同调用预算下NDCG@10可提升9点以上;工程上只需替换调度逻辑,不改变提示、不增加模型推理。适合电商搜索/推荐中候选商品重排等预算敏感场景。
- 随机方向提示仅需一次LLM调用完成成对比较,将系统性的顺序偏差转化为零均值噪声,直接削减50%的调用成本,且不损失排序质量。实现简单:随机化文档在prompt中的顺序即可。
- 若存在可靠的先验排序(如BM25或粗排分),PAC主动排序进一步用少量锚点比较快速收敛至top-K,调用量可低至180次左右,适合极低延迟场景。
- 两种主动排序均支持查询内并行:莫哈杰的各锦标赛之间、PAC的锚点比较均可并发,实际延迟可通过批量推理大幅压缩,适合高吞吐线上服务。